• Evaluation of the research methodology in genetic, molecular and proteomic tests Original Articles

    Lumbreras, Blanca; Jarrín, Inmaculada; Hernández Aguado, Ildefonso

    Resumo em Espanhol:

    Introducción: El avance en las tecnologías del análisis genómico ha supuesto el desarrollo de nuevas pruebas diagnósticas con potencial aplicación clínica. Así como ha sucedido en otros campos del diagnóstico, conocer las limitaciones metodológicas de la investigación en genética facilitará la aplicación de sus resultados. Métodos: Se analizaron 44 artículos publicados en JAMA, Lancet, New England Journal of Medicine, Cancer Research y Clinical Cancer Research, de 2002 a junio de 2005, que estudiaban la exactitud diagnóstica de pruebas genéticas, moleculares y de proteómica. Se aplicaron 24 criterios metodológicos de la guía STARD (Standards for Reporting of Diagnostic Accuracy). Resultados: La media de cumplimiento de los criterios aplicados fue de 9,8 (intervalo de confianza [IC] del 95%, 8,8-10,6), y las mayores deficiencias se observaron en los aspectos relacionados con la descripción de la selección de los pacientes (9; 20%), el tratamiento de los resultados indeterminados (5; 11%) y la determinación de la reproducibilidad de la técnica (6; 13%). En cambio, sí se observó una alta frecuencia en la descripción del patrón de referencia (39; 87%) y del método usado (28; 62%). Discusión: Los artículos evaluados incumplen gran parte de los requisitos de calidad recogidos en la propuesta STARD, observándose una peor calidad metodológica que en otros campos diagnósticos. Los aspectos que más necesitan mejorar son los relacionados con la descripción de la selección de los pacientes y la determinación de la reproducibilidad. La investigación y el avance en nuevas tecnologías genético-moleculares requieren un mejor cumplimiento de los estándares epidemiológicos y clínicos que ya se aplican a otros campos diagnósticos.

    Resumo em Inglês:

    Introduction: Advances in genomic analysis technologies have led to the development of new diagnostic tests with clinical application. Therefore, as in other diagnostic fields, awareness of the methodological limitations of genetic investigation will facilitate the application of the results. Methods: 44 articles which studied the diagnostic accuracy of genetic, molecular and proteomic tests, and published in JAMA, Lancet, New England Journal of Medicine, Cancer Research y Clinical Cancer Research from 2002 to June 2005 were analysed. 24 methodological criteria of the STARD guide (Standards for Reporting of Diagnostic Accuracy) were applied. Results: The mean number of methodological criteria satisfied was 9.8 (95%, CI 8.8-10.6), with the greatest deficiencies observed in the aspects related to the description of patient selection, 9 (20%), the treatment of indeterminate results, 5 (11%), and the determination of the technique's reproducibility, 6 (13%). In contrast, a high frequency was observed in the description of the reference standard, 39 (87%), and the method used, 28 (62%). Discussion: The articles evaluated fail to fulfil many of the quality requirements laid out in the STARD proposal, with the methodological quality being lower than in other diagnostic fields. The aspects most in need of improvement are those related to the description of patient selection and the determination of reproducibility. Research and progress in new genetic-molecular technologies require improved fulfilment of the epidemiological and clinical standards which are already applied by other diagnostic fields.
Sociedad Española de Salud Pública y Administración Sanitaria (SESPAS) Barcelona - Barcelona - Spain
E-mail: gs@elsevier.com